FilipovOd 14. století stál na místě zámku hospodářský dvůr Šintlochy, patřící mimo jiné Trčkům z Lípy. V roce 1711 se stal majitelem klášter ve Žďáru nad Sázavou, který zde nechal vybudovat kapli. V roce 1760 získal dvůr Filip Nerius Krakovský z Kolowrat, přejmenoval jej a zahájil přestavbu kaple na barokní zámek. Přestavbu dokončil jeho syn Leopold Vilém. V roce 1818 koupil filipovský zámek František Zichy a v roce 1831 Eisensteinové. V roce 1856 převzala majetek Emilie Eisensteinová a spolu s manželem Benediktem Boleslavským z Rittersteinu zámek mezi lety 1863-1865 přestavěli ve stylu anglické gotiky. Posledními majiteli byli mezi lety 1905-1945 Kleeborn-Eisensteinové.
